Asaṅga có cha là một người giai cấp Kṣatriya (Sát-đế-lỵ) và mẹ là giai cấp Brahmin (Bà-la-môn) ở Puruṣapura (ngày nay là Peshawar, Pakistan), vào thời điểm đó là một phần của vương quốc cổ Gandhāra. Các học giả đương thời cho rằng ông sinh ra vào khoảng thế kỷ thứ tư CN. Ông đầu tiên có lẽ đi theo trường phái Mahīśāsaka (Hoá-địa-bộ) hay Mūlasarvāstivāda như sau này đã theo Mahāyāna (Đại-thừa). Theo vài học giả, nền tảng cho những bài luận vi diệu pháp của Asaṅga có nhiều dấu tích của trường phái Mahīśāsaka. André Bareau viết:

Đủ để thấy rằng Asaṅga là một tu sĩ phái Mahīśāsaka hồi còn trẻ, và rằng ông đã đem phần lớn những quan điểm học thuyết phù hợp của phái này vào trong tác phẩm của ông sau khi ông trở thành một đại luận sư của trường phái Mahāyāna, khi ông tạo nên cái có thể cho cho là một Abhidharma-piṭaka (Luận-tạng) mới và của Mahāyāna.

Theo ghi chép của ngài Huyền Trang trong chuyến du hành Ấn Độ của mình thì Asaṅga ban đầu là một tu sĩ phái Mahīśāsaka, những sớm đã chuyển hướng theo Mahāyāna. Asaṅga có một người em là Vasubandhu (Thế-thân), vốn là một vị sư theo trường phái Sarvāstivāda (Nhất-thiết-hữu-bộ). Vasubandhu được cho là đã ngã về Phật giáo Mahāyāna sau khi gặp Asaṅga và trở thành môn đồ của Asaṅga.